摘要 - 现实生活中的机器人导航不仅涉及到达目的地;它需要在解决方案特定目标的同时优化运动。人类表达这些目标的一种直观方式是通过诸如口头命令或粗略草图之类的抽象提示。这样的人类指导可能缺乏细节或嘈杂。尽管如此,我们希望机器人能够按预期导航。让机器人根据人类期望来解释和执行这些抽象说明,他们必须与人类对基本导航概念有共同的理解。为此,我们介绍了Canvas,这是一个新颖的框架,结合了常识感知导航的视觉和语言说明。它的成功是由模仿学习驱动的,使机器人能够从人类航行行为中学习。我们提出命令,这是一个具有人类通知结果的综合数据集,范围超过48小时,219公里,旨在训练模拟环境中的常识性导航系统。我们的实验表明,画布在所有环境中都超过了强大的基于规则的系统,并以嘈杂的说明显示出了卓越的性能。值得注意的是,在果园环境中,Ros Navstack记录了总成功率0%,帆布的总成功率为67%。画布也与人类的示范和常识性约束密切一致,即使在看不见的环境中也是如此。此外,画布的现实部署展示了令人印象深刻的Sim2real转移,总成功率为69%,强调了在模拟环境中为现实世界应用中的人类展示学习的潜力。
主要关键词
![arxiv:2410.01273v1 [cs.ro] 2024年10月2日PDF文件第1页](/bimg/a/a228b040bc7c6bb9ed925a8f7efb2d2cbfd746eb.webp)
![arxiv:2410.01273v1 [cs.ro] 2024年10月2日PDF文件第2页](/bimg/8/8a892fadc8be6673e26969d0e3685a5cdfa47162.webp)
![arxiv:2410.01273v1 [cs.ro] 2024年10月2日PDF文件第3页](/bimg/3/332ff9c81fd4397169642ed7e94397a817cd0c4f.webp)
![arxiv:2410.01273v1 [cs.ro] 2024年10月2日PDF文件第4页](/bimg/2/207b9c2c55f2f9cc659f0873bdf0daf523032f14.webp)
![arxiv:2410.01273v1 [cs.ro] 2024年10月2日PDF文件第5页](/bimg/4/4c107afef8794bc21ed2126cd8e5558a714f0cd8.webp)
